Text copied to clipboard!
Názov
Text copied to clipboard!Hadoop administrátor
Opis
Text copied to clipboard!
Hľadáme skúseného Hadoop administrátora, ktorý bude zodpovedný za správu, údržbu a optimalizáciu Hadoop klastrov v našej organizácii. Ideálny kandidát bude mať silné technické zručnosti v oblasti veľkých dát, skúsenosti s distribučnými systémami a schopnosť riešiť problémy v reálnom čase. Vašou úlohou bude zabezpečiť vysokú dostupnosť, škálovateľnosť a bezpečnosť dátovej infraštruktúry založenej na Hadoop technológiách.
Ako Hadoop administrátor budete úzko spolupracovať s dátovými inžiniermi, vývojármi a analytikmi na zabezpečení efektívneho toku dát v rámci organizácie. Budete zodpovedný za inštaláciu, konfiguráciu a monitorovanie Hadoop komponentov ako HDFS, YARN, Hive, HBase, Spark a ďalších. Okrem toho budete implementovať zálohovacie a obnovovacie stratégie, spravovať prístupové práva a zabezpečenie dát, ako aj vykonávať pravidelné aktualizácie a ladenie výkonu systému.
Očakávame, že kandidát bude mať skúsenosti s nástrojmi ako Cloudera, Hortonworks alebo Apache Hadoop, ako aj znalosť skriptovacích jazykov (napr. Bash, Python) a nástrojov na automatizáciu (napr. Ansible, Puppet). Znalosť cloudových platforiem ako AWS, Azure alebo Google Cloud je výhodou.
Táto pozícia je ideálna pre technicky zdatného jednotlivca, ktorý má vášeň pre veľké dáta, rád rieši komplexné problémy a chce sa podieľať na budovaní robustnej dátovej infraštruktúry. Ak máte analytické myslenie, schopnosť pracovať samostatne aj v tíme a túžbu neustále sa učiť nové technológie, radi vás privítame v našom tíme.
Zodpovednosti
Text copied to clipboard!- Správa a údržba Hadoop klastrov
- Inštalácia a konfigurácia Hadoop komponentov (HDFS, YARN, Hive, atď.)
- Monitorovanie výkonu systému a riešenie incidentov
- Implementácia bezpečnostných opatrení a správa prístupových práv
- Zálohovanie a obnova dát
- Automatizácia úloh pomocou skriptov a nástrojov
- Spolupráca s dátovými inžiniermi a vývojármi
- Optimalizácia výkonu a škálovateľnosti systému
- Vykonávanie aktualizácií a patchov
- Dokumentácia procesov a konfigurácií
Požiadavky
Text copied to clipboard!- Skúsenosti so správou Hadoop klastrov
- Znalosť Hadoop ekosystému (HDFS, Hive, HBase, Spark, atď.)
- Zručnosti v skriptovaní (Bash, Python)
- Znalosť nástrojov na automatizáciu (Ansible, Puppet)
- Skúsenosti s monitorovacími nástrojmi (Nagios, Ambari, Cloudera Manager)
- Znalosť Linux/Unix prostredia
- Schopnosť riešiť technické problémy a incidenty
- Znalosť cloudových platforiem (AWS, Azure, GCP) je výhodou
- Dobré komunikačné a tímové schopnosti
- Vysokoškolské vzdelanie v oblasti informatiky alebo príbuznom odbore
Potenciálne otázky na pohovor
Text copied to clipboard!- Aké máte skúsenosti s administráciou Hadoop klastrov?
- Ktoré komponenty Hadoop ekosystému ste používali najčastejšie?
- Ako by ste riešili výpadok jedného z uzlov v klastri?
- Aké nástroje používate na monitorovanie výkonu Hadoop systému?
- Máte skúsenosti s cloudovými platformami? Ktorými?
- Ako zabezpečujete prístupové práva a ochranu dát v Hadoop prostredí?
- Popíšte situáciu, keď ste museli optimalizovať výkon Hadoop klastru.
- Aké skriptovacie jazyky ovládate a ako ich využívate pri práci?
- Ako pristupujete k zálohovaniu a obnove dát v Hadoop systéme?
- Aké sú vaše skúsenosti s nástrojmi ako Cloudera alebo Hortonworks?
